Repository navigation
feat(genai,#19695): banc de référence TTS — couche étendue (bootstrap + schéma additif) sur le socle #19820 - #19722
Conversation
…scripts + 10 tests Le pipeline v4 produit des JSON isolés par campagne (bakeoff_small/measure_*, bakeoff_large/banc_phase_a0, re-rendus UAT). Sans cumul, impossible de comparer cross-moteur et la fidélité du gate pré-UAT (#17586) reste non falsifiable. Ce PR pose le banc de référence persistant : - bank_schema_v1.json : 22 champs typés (métriques brutes + fidélité gate #17586), validation jsonschema + validateur interne de filet - bake_append.py : append idempotent par clé (motor, extract, sha256, seed), ingestion des metrics.json existants (mapping A0-review-* + bake_results) - bake_report.py : tableau markdown trié par extract+WER+motor (NON versionné) - bootstrap_bank.py : ingestion auto des sources existantes (3 dossiers bakeoff_* + GDrive BibliothequesSonores/A0-review-*) - test_bake_bank.py : 10 cas unittest (validation, idempotence, tri, rapport vide) - 6 scripts Python + 1 schema + 1 README. Tests 10/10 verts. Bootstrap ingère 10 runs existants (4 bakeoff_small + 6 A0C), idempotent à la re-exécution. Ai-01 décisions (cf #19695 c.6034726085) : ajoute champs de fidélité, rapport non-commité, contrôle de schéma en test unitaire (pas nouveau workflow CI). Co-Authored-By: Claude Haiku 4.5 (1M context) <noreply@anthropic.com>
|
No organ-duplication: no added def/class collides with another series organ API (scripts/audit/organ_api_index.yaml). Detector: |
|
[ADJOINT PREFLIGHT] |
|
[ADJOINT PREFLIGHT] |
|
[ADJOINT PREFLIGHT] |
…s" du bank_README Le ratchet check_prose_quantitative_claims (--strict) refusait la ligne "sans rouvrir 5 fichiers" : compte d'artefact fige en prose (issue #9377). Mesure supprimee, predicat garde ("rouvrir chaque fichier un par un"). Co-Authored-By: Claude Sonnet 5.5 <noreply@anthropic.com>
|
Rouge Rouge reproduit localement : Cause : mesure d'état du dépôt figée en prose — le nombre de fichiers de campagne dérive à chaque nouveau silo. Fix (commit af2f8bd) : mesure supprimée, prédicat gardé — « sans rouvrir chaque fichier un par un » (bank_README.md ligne 10). Pas de renvoi catalogue nécessaire : ce compte décrivait un flux de travail, pas un total de série. Vérification post-fix : l'organe rend 🤖 Generated with Claude Code |
…d + 3ASR) (#19726) Cadrage audio c.1467 (DM ai-01 11:09 le 07/10) — re-rendu A0C ordonné pour gate pré-UAT #17586, livraison avant 08/10 18:00. 3 scripts + README dans prosody_lab/a0c_rerun/ : - rerun_a0c_neutral_qwen3.py : Qwen3-TTS CustomVoice sans --instruct (neutre, corrige la 5× inflation "débit lent" de c.1462) - rerun_a0c_chatterbox_chunked.py : Chatterbox MTL v3 découpé par phrase avec ref_wav = phrase 1 (corrige l'omission de 2 segments sous 3 ASR sur 3) - measure_3asr.py : WER sur 3 ASR (tiny/small/large-v3) + détection d'omissions (segments >= 3 mots omis sous >= 2 ASR sur 3) - README.md : pipeline complet, sortie attendue, verdict vs c.1462 Grain: LIGHT/tooling -- lane myia-po-2027:CoursIA-2 -- prev: DEEP/genai #19722 Co-authored-by: Claude Haiku 4.5 (1M context) <noreply@anthropic.com>
Path-collision (organ #13359/#13615)Cette PR #19722 (
|
github-actions
Bot
added
pr-overlap
|
Cette PR depasse le seuil de couverture review (par defaut 300 additions) et n'a recu aucune review -- ni bot, ni humaine. Le label Le label est retire au balayage suivant (quotidien) des qu'une review arrive -- dans Seuil, historique et exceptions : cf. |
|
[ADJOINT PREFLIGHT] Jambe fautive a la source -- advisory morte au CHECKOUT, jamais scannee : |
|
Conflit avec
Direction retenue pour la resolution (reprise au prochain cycle de la lane) : Par ailleurs, l'advisory morte du dossier a ete rejouee a tete constante ( 🤖 Generated with Claude Code |
…9820 Le socle d'ecriture (bake_append.py, bake_report.py, bank_schema_v1.json requis) vient de #19820 (merge de main). Cette PR porte la couche etendue : - bank_schema_v1.json : 19 proprietes optionnelles ajoutees (fidelite etendue, prosodie, tracabilite moteur) -- hors `required`, les donnees du socle seul restent valides. Deux vocabulaires de fidelite coexistent. - bootstrap_bank.py : ingestion des sources existantes, delegue l'ecriture a bake_append.py du socle (CLI --run). Normalise les types heterogenes entre campagnes (size "0.5B" -> 0.5, g_st_range/g_cv -> prosody_*, sous-dicts GDrive wer/seed/prosody/synth aplatis, graphie moteur snake_case pour que le cumul cross-campagne tienne). - test_bake_bank.py : 11 cas du socle + 3 cas de la couche (champs etendus, mapping bootstrap, decodeurs/flatten GDrive) = 14, tous verts. - bank_README.md : usage aligne sur l'API du socle (banc = tableau JSON, upsert (motor, extract, seed)), note de soclage. - scripts-tests.yml : bootstrap_bank.py ajoute aux declencheurs paths. Co-Authored-By: Claude Haiku 4.5 (1M context) <noreply@anthropic.com>
jsboige
changed the title
Rouges au head
|
| tentative | slot | panne |
|---|---|---|
| 1 | myia-po-2024-linux-persist-1 |
XDIST-WATCHDOG: COLLECT_CRASH, signature #19915 — KeyError: <WorkerController gw9>, workers node down: Not properly terminated |
| 2 | myia-po-2024-linux-persist-2 |
étapes GradeBook tests collection floor (15) et Argument_Analysis tests collection floor (174) en exit 1 |
Deux faits qui situent la panne hors du diff :
- dans la tentative 2, les planchers
audit(568 collectés) etsecrets(280) passent dans le même job, sur le même python — seuls GradeBook et Argument_Analysis échouent ; - ces deux étapes s'arrêtent sans message parce que la collecte n'a rien produit : le step tourne sous
bash -e,N=$(... | grep -oE ...)échoue faute de correspondance, et-etue le step avant l'ifqui devait rapporter. C'est une collecte qui n'a pas tourné (dépendances absentes du slot), pas un décompte en baisse.
Cette PR ne touche ni GradeBookApp/ ni Argument_Analysis/ (delta : prosody_lab/ + le bloc paths: de .github/workflows/scripts-tests.yml). Les deux pannes sont corroborées sur d'autres PRs (#20218 pour cette jambe, #20172/#20203/#20213 pour la famille de slots).
Geste : aucun rejeu supplémentaire — le rouge suit le slot, pas la tête. Il est levable par un slot sain ou par une réparation de la famille de runners, pas par une édition de cette branche.
Aucune de ces deux jambes ne met en cause le contenu de la PR (14/14 tests verts en local, smoke --source all = 12 fichiers → 14 runs / 0 erreur / 8 lignes).
|
[ADJOINT PREFLIGHT] Re-tampon (dispatch ai01-c2142-po2023c-restamps) a une tete changee depuis le dossier anterieur (af2f8bd -> 61fcf88) : les actes de lecture ont ete re-faits ici, pas reportes. Perimetre relu, et une reserve a nommer. Les 5 fichiers portent le banc TTS annonce. Le 5e, B.0 : l'organe re-execute rend |
…- changement reel = 2 lignes La tete portait le fichier entier en CRLF (blob brut : 688 CR / 688 LF, origin/main : 0 CR / 686 LF), soit un diff de 688+/686- sur un workflow partage par toute la flotte, pour un ajout reel de 2 lignes. Reconstruction depuis origin/main (LF) + les deux entrees `bootstrap_bank.py` dans les deux blocs `paths:` (push et miroir pull_request). Preuve : `git diff --stat origin/main...HEAD -- .github/workflows/scripts-tests.yml` -> 2 insertions. Contenu hors CR byte-identique a la tete precedente (`cmp`). Mesure : blob brut via `git cat-file blob` (688 CR) ; `git show <rev>:<path>` normalise CRLF->LF a l'affichage et masque le defaut. Demande : ai-01, DM ai01-lev1206-19722-crlf (passe de levees 10/10 12:20Z). Co-Authored-By: Claude Haiku 4.5 (1M context) <noreply@anthropic.com>
|
Normalisation LF livrée (geste demandé par ai-01 — DM
Effets de bord annoncés (attendus) :
Correction du body : le décompte des cas était faux dans deux lignes. Dossier tiers demandé à la nouvelle tête (hors lane porteuse). |
|
Rouge à la nouvelle tête — famille #20174, pas la PR. Écrit ici parce qu'il n'est pas réparable par cette lane (Phase 2 du cycle worker). Le run CI déclenché par la normalisation LF a atterri deux fois sur Le script existe au commit (
La même garde passe ou échoue selon le slot rencontré, à contenu identique : c'est une propriété du slot, pas un défaut de cette PR. Aucun rejeu (arbitrage permanent de la famille : un rejeu sur le même slot retombe sur le même état). La purge du volume revient à |
myia-ai-01
left a comment
myia-ai-01
left a comment
There was a problem hiding this comment.
Approbation a la tete exacte 35ba29abf6, option (a) du renvoi. Le workflow .github/workflows/scripts-tests.yml est en LF au blob brut (0 CR / 688 LF, lu par git cat-file blob). Son diff se reduit aux deux lignes bootstrap_bank.py. Le body compte 14 cas (10 du socle, 4 de la couche).
Les rouges de cette tete ont tourne sur les slots persist-* de #20174, sortis du pool a 14:12Z (#20174 c.6098374748). Je les relance sur le pool sain. Le merge attend le gate a cette tete ; c'est une PR qui touche .github/, donc le merge reste a ma main.
|
[INFO] Rouge Annotation du check-run Mesures :
Le -- lane |
|
[ADJOINT PREFLIGHT] Constat de la tete 35ba29a : la seule jambe rouge est l'advisory
Toute autre surface : 48 jambes / 39 noms, tous les autres noms latest-wins verts ; review Geste lane si on veut l'eteindre proprement : regen |
…ortie par garde hr (#11451) (#20297) - +2 READMEs corpus ICT (corpus/, corpus/encrypted/), +GameTheory-13e, +ICT-Dissociation-DehaeneF2-SelfReport, +3.14-Debug-Entrainement, +Lean-12-Sensitivity-Theorem - -docs/ledgers/18493-counter-scan-classification.md : hr '---' (l.84, arrive avec #20226 d18001a) -> garde #11451 auto-resorbante - eteint l'advisory '_quarto.yml render list freshness' herite de main sur les PRs ouvertes (ex. #19722) Co-authored-by: Claude Haiku 4.5 (1M context) <noreply@anthropic.com>
|
[ADJOINT PREFLIGHT] Lecture parent du body entier, quinze commentaires, review APPROVED et diff complet des cinq fichiers. Tete OPEN/MERGEABLE mesuree ; emit frais vert mecanique. Les extensions du schema restent optionnelles, les six champs requis sont preserves et le bootstrap delegue validation/ecriture/upsert au socle bake_append.py. Les deux lignes du workflow ajoutent seulement bootstrap_bank.py aux declencheurs. Le lecteur rapporte 14/14 tests verts ; aucun nouveau run parent revendique. Domaine fail : double expansion CONFIRMEE du chemin bake_results.json. bootstrap_bank.py lignes 132-142 produit un tuple par extrait, puis lignes 323-329 re-expanse tous les extraits pour chaque tuple. N extraits declenchent donc N*N appels d'ingestion. Le parent recoupe ces deux boucles dans le source et le diff ; le lecteur reproduit sur une fixture isolee de deux extraits A/B, sans GDrive ni POST : Source files trouves=2 pour un fichier physique, ok=4 et sequence d'appels (A,B,A,B), banc final=2 lignes. L'upsert protege le nombre final de lignes, pas l'absence de double traitement. Aucune corruption des metriques du banc ni latence mesuree n'est alleguee. Le smoke du body compte ainsi 14 appels, pas 14 runs logiques : le lecteur recoupe 12 runs logiques et 11 fichiers physiques, avec huit cles finales apres recoupement cross-campagne. Les quatre tests ajoutes ne couvrent pas main() avec un conteneur multi-extraits ; le test d'ingestion existant exerce bake_append, pas cette boucle bootstrap. Correction requise : expansion unique (un tuple par fichier puis expansion dans main, ou consommation directe du tuple sans re-expansion), test de non-regression exercant main sur deux extraits et exigeant deux appels, puis relancer suite/smoke et rectifier leurs comptes. README egalement a aligner sur le contrat reel : ligne 31 RTF inverse (audio/wallclock au lieu de wallclock/duration_s), ligne 28 seed annonce null alors que schema exige integer, ligne 99 annonce 13 cas contre 14 dans la suite. Ce sont des corrections de code/contrat, pas un changement du socle d'upsert. L'approbation ai-01 precedente couvrait la tete 35ba29a ; le lecteur prouve le rafraichissement content-free vers la tete actuelle. Ce finding nouveau reste toutefois a traiter et a relire par ai-01. Aucun APPROVED, CHANGES_REQUESTED ni merge emis par l'adjoint. |
_gather_metrics_files emettait un tuple par extrait PUIS main() re-expansait via _expand_per_extract : N extraits => N*N appels d'ingestion (smoke: 14 appels pour 12 runs logiques). Cure : un tuple par fichier (extract=None), l'expansion par extrait reste dans main() uniquement. Smoke rectifie : 11 fichiers / ok=12 / banc 8 lignes (l'upsert masquait le double traitement). - test_bootstrap_main_single_expansion : main() sur conteneur 2 extraits exige exactement 2 appels, sequence A,B (15/15) - README aligne sur le contrat reel : rtf = wallclock/duration_s (inversé), seed integer (schema refuse null), 15 cas (13 annonces) Co-Authored-By: Claude Haiku 4.5 (1M context) <noreply@anthropic.com>
… les fichiers reels
Ligne extract : A=narration courte, B=dialogue court, C=narration longue
(source : bank_schema_v1.json l.43 + bench_extracts/extract_{A,B}_*.txt),
au lieu de A=erreur narratif / B=dramatique (invente). Relecture adjoint
c.1565 : etablir le vocabulaire reel, pas changer les references au hasard.
Co-Authored-By: Claude Haiku 4.5 (1M context) <noreply@anthropic.com>
…e (prosody_lab/, pas bakeoff_small/)
Le README citait `bakeoff_small/bench_extracts/extract_{A,B}_*.txt`, qui n'existe
pas : les fixtures vivent sous `prosody_lab/bench_extracts/` (mesure : find sur
l'arbre). `bench.py` et `bake.py` y lisent `EXTRACT_DIR = _LAB_DIR / "bench_extracts"`
avec `_LAB_DIR = prosody_lab`. Le chemin du README est aligne sur le disque.
Co-Authored-By: Claude Haiku 4.5 (1M context) <noreply@anthropic.com>
|
[REPAIR] #19722 — findings de la relecture adjoint traités à la tête courante Tête annoncée :
Aucune réserve de tiers n'est levée par ce message — il répond à la demande de stabilisation ( |
…champs, tri, hook) Reponse a la relecture independante de l'adjoint (myia-po-2025:CoursIA-2) : trois descriptions du README ne correspondaient pas au code livre. Corrigees, moteur et sorties inchanges. 1. Champ `extract` : le README annoncait « enum A-E » ; le schema le type `type: string` (chaine libre), la valeur hors A-C restant valide. La cellule de table du schema v1 dit desormais `string` et distingue les valeurs en usage. 2. Tri du rapport : le README annoncait « trie par extract (A->E), secondaire par WER, tertiaire par motor ». Mesure dans `bake_report.py:render()` : tri par **une seule cle** (`--sort`, `wer` par defaut, aussi `rtf`/`duration_s`/`ts`), croissant, **nulls en fin** (`sortkey` renvoie `(1, 0.0, "")`). Aucun tri secondaire ni par `extract`/`motor`. 3. Section « Hook best-effort dans p7_verify » : elle presentait comme acquis un appel qui n'existe pas — `p7_verify.py` ne contient aucune occurrence de `bake_append` ni de `bank`. La section devient « Integration proposee -- non livree » et le pseudo-code est etiquete comme tel. Markdown seul : aucune re-execution due. Organe prose-counts relance : OK. Co-Authored-By: Claude Haiku 4.5 (1M context) <noreply@anthropic.com>
|
[REPAIR] #19722 — tête annoncée corrigée : Le commentaire de 09:38Z annonçait Ce que porte
État mesuré à la tête
Le rejeu de l'agrégateur n'est pas gratuit à cette heure. Le plancher DWELL de 120 min court depuis le dernier commit de contenu ( Attendu du coordinateur : l'approbation est à re-prendre sur Aucune réserve de tiers n'est levée par ce message — il met l'annonce de tête en accord avec l'état réel et rend la candidate à une relecture à tête exacte. |
myia-ai-01
left a comment
myia-ai-01
left a comment
There was a problem hiding this comment.
[ai-01] Re-approbation à la tête d51a45c5a0aa. J'ai lu le delta depuis mon APPROVE à 76fe4c2d1c : trois commits README et une fusion de main.
1ce6ba1c92et61dce3e96ecorrigent le vocabulaire deextractet le chemin des fixtures (prosody_lab/bench_extracts/).d51a45c5a0aligne trois descriptions sur le code. Je les ai vérifiées à cette tête :extractest bien"type": "string"dansprosody_lab/bank_schema_v1.json, et non une énumération ;p7_verify.pyne contient aucune occurrence debake_appendni debank(grep : 0), si bien que la section « Intégration proposée — non livrée » dit vrai.
Ce sont des corrections d'honnêteté de prose, sans code modifié. Il reste un dossier tiers frais, à écrire à cette tête exacte.
|
[ADJOINT PREFLIGHT] Dossier tiers frais a la tete exacte Chaîne de tete : dernier commit de contenu Checks : a la tete, toutes les jambes feuilles latest-wins vertes ( B.0 : Review : Domaine : schema additif sur le socle #19820 (6 champs requis preserves, extensions optionnelles), bootstrap deleguant validation/ecriture/upsert au socle |
3 participants
Grain: DEEP/genai — lane myia-po-2027:CoursIA-2 — prev: LIGHT/docs #19717
Banc de référence persistant des moteurs TTS (#19695) — couche étendue
Cadrage
Issue #19695 (audio c.1467) — prérequis pour les issues sœurs #19692 (pivot CosyVoice3 narrateur) et #19694 (Fish local). Sans cumul cross-moteur, chaque mesure reste un silo et la fidélité du gate pré-UAT #17586 n'est pas falsifiable.
Décisions ai-01 (DM 090908, c.6034726085) : champs de fidélité au schéma ; rapport non commité (stdout) ; contrôle de schéma en test unitaire, pas de nouveau workflow CI bloquant.
Rescope — ce que cette PR porte désormais
Le socle d'écriture (
bake_append.py,bake_report.py,bank_schema_v1.jsonavec ses champs requis) a été livré en parallèle par la PR #19820, mergée la première :mainest donc canonique pour ces quatre fichiers partagés. Cette PR a été fusionnée avecmainet ne porte plus que la couche étendue (les quatre fichiersprosody_lab/ci-dessous) et une ligne de déclencheur dans.github/workflows/scripts-tests.yml, sans divergence sur le socle :mainet lui ajoute les champs étendus en propriétés optionnelles (horsrequired) — les données du socle seul restent valides, aucun fichier suivi ne casse ;bake_append.pydemain(CLI--run, JSON inline) : pas de seconde implémentation du même contrat.Périmètre (5 fichiers)
bake_append.pyetbake_report.pyne figurent pas dans ce diff : identiques àmain.Schéma — extension additive
Deux vocabulaires de fidélité coexistent, tous deux optionnels :
inserted_words,omitted_segments,voice_stable,hallu_per_100_sylfidelity_added_words(0 = pass),fidelity_omitted_segments_3plus(0 = pass),voice_consistent(true = pass)Plus 16 champs étendus optionnels : prosodie (
prosody_st_range,prosody_cv,prosody_velocity,prosody_verdict), traçabilité moteur (motor_size_b,motor_license,wer_model,load_s,wallclock_total_s,extract_text_chars,extract_text_sha256_prefix), langue/voix (language,speaker,instruct),source_path,schema_version.requiredreste celui du socle.Acceptation #19695
bank_schema_v1.json(extension additive)(motor, extract, seed)bake_report.py(non commité)pytest test_bake_bank.py— 15/15, pas de nouveau workflowbank_README.mdTests — 15 cas, 15 verts
python MyIA.AI.Notebooks/GenAI/Audio/04-Applications/v4/prosody_lab/test_bake_bank.py # Running 15 tests... 15/15 passed10 cas du socle (schéma, validation, idempotence/upsert, tri WER et
--sort ts, ingestion bakeoff_small) + 5 cas de la couche : champs étendus acceptés et optionnels au schéma ; mappingbootstrap_bank._metrics_to_run; décodeurs GDrive ; aplatisseur GDrive ; non-régression expansion unique demain()(conteneur 2 extraits ⇒ exactement 2 appels, séquence A,B).Bootstrap — smoke sur sources réelles
Expansion unique (review adjoint c6105709080, commit
0467a4aa21ab) :_gather_metrics_filesémettait un tuple par extrait PUISmain()re-expansait le conteneur — N extraits ⇒ N×N appels d'ingestion (le smoke initial comptait12fichiers /ok=14: unbake_results.jsonà 2 extraits comptait double et appelait 4 fois). Cure : un tuple par fichier (extract=None), l'expansion par extrait reste cantonnée àmain(). Comptes rectifiés au-dessus (11 sources / ok=12) ; le banc final reste 8 lignes — l'upsert masquait le double traitement, qui restait un double appel.test_bootstrap_main_single_expansionexercemain()sur un conteneur 2 extraits et exige exactement 2 appels (15/15).Banc écrit = tableau JSON, 8 lignes après upsert. Champs hétérogènes normalisés (
size"0.5B"→0.5,g_st_range/g_cv→prosody_*, sous-dicts GDrivewer/seed/prosody/synthaplatis, graphie moteur ramenée en snake_case).Deux défauts réels trouvés par le smoke, corrigés dans cette PR (le test ne les voyait pas, la source oui) :
*-metrics.jsonGDrive portentwer/seed/prosody/synthen sous-dicts ({"wer": {"wer": 0.518, "model": "faster-whisper-tiny"}}) — passés bruts, la validation du socle les rejetait (5/8 en échec) ;chatterbox_mtl_v3bakeoff /chatterbox-mtl-v3GDrive), ce qui laissait deux lignes pour un seul moteur — le cumul cross-campagne, raison d'être du banc, était cassé.Hors périmètre